環境： Spark2.1.0 、Hadoop-2.7.5 代碼運行系統:Win 7在運行Spark程序寫出文件(savaAsTextFile)的時候，我遇到了這個錯誤： 查到的還是 ...

問題背景：通過Spark SQL的jdbc去讀取Oracle數據做測試，在本地的idea中沒有報任務錯誤。但是打包到集群的時候報： 測試代碼： 在本地測試通過，服務 ...

There are 2 missing blocks. The following files may be corrupted： 步驟1，檢查文件缺失情況 可以看到， blk_10747 ...

Spark多任務提交運行時候報錯。 錯誤原因： 每一個Spark任務都會占用一個SparkUI端口，默認為4040，如果被占用則依次遞增端口重試。但是有個默認重試次數，為16次。16 ...

Spark SQL讀取數據Oracle的數據時，發現number類型的字段在讀取的時候精度丟失了，使用的spark版本是Spark2.1.0的版本，竟然最后經過排查和網上查資料發現是一個bug。在Sp ...